home *** CD-ROM | disk | FTP | other *** search
/ Super Shareware Collection / Super Shareware Collection.iso / os_2 / pt4b10.zip / PTERM.TXT < prev    next >
Text File  |  1994-02-24  |  24KB  |  535 lines

  1.  
  2.  
  3.  
  4.                                   P T E R M
  5.  
  6.                          Paragon Terminal Application
  7.  
  8.                                 for Windows NT
  9.  
  10.                                Version 04b.p10
  11.  
  12.                                1, January 1994
  13.  
  14.  
  15.  
  16.  
  17.    What's Going on Here?
  18.    =====================
  19.  
  20.       This is a beta of Paragon Terminal Application for Windows NT. What's
  21.       so great about PTERM? Not much yet, but here is a list of features
  22.       available so far:
  23.  
  24.          o  Fully threaded, native Win32 application
  25.  
  26.          o  Auto Zmodem download/upload with crash recovery and
  27.             auto-renaming of incoming files which already exist.
  28.  
  29.          o  Fast(er) ANSI (including color!) terminal emulation
  30.  
  31.          o  Console based for speed
  32.  
  33.          o  TELNET support
  34.  
  35.       The other valuable feature of PTERM is that as far as I know it is
  36.       the only Zmodem capable native, multi-threaded Win32 terminal
  37.       application available. It won't be for long, but for now...
  38.  
  39.  
  40.       Some glaring omissions:
  41.  
  42.          o  No Dialer!?!?!
  43.  
  44.          o  No annoying "register me now, or die" messages and
  45.             purposefully broken features.
  46.  
  47.          o  Many other things which you will likely go insane without (but
  48.             hang in there, it is my intention to evolve PTERM).
  49.  
  50.  
  51.       *** Note: Please read the file RELNOTES.TXT before using PTerm. It
  52.                 contains important information on known bugs and
  53.                 limitations in this release of PTerm.
  54.  
  55.  
  56.    About This Manual!
  57.    ==================
  58.  
  59.       This is the sorriest excuse for manual yet -- but I am anxious to
  60.       get this PTerm out to everyone, I'm not a tech-writer, and PTerm
  61.       isn't all that compilcated. So if after reading this text you have
  62.       the feeling that it was a poorly organized jumble of information,
  63.       well, your feeling is correct. What I do hope this manual will do
  64.       for you is to give you just enough information to get started using
  65.       PTerm. If it doesn't, please email me and I will be happy to answer
  66.       your questions (see my addresses below).
  67.  
  68.  
  69.    Why Would You Do Such a Thing?
  70.    ==============================
  71.  
  72.       Some months back, I was asked to beta test a C++ based,
  73.       multi-platform communications library from a company called Lookout
  74.       Mountain Software (William Herrera, owner/author, BBS 719-545-8572).
  75.  
  76.       The best method I could think of for testing this package was to use
  77.       it as the core of a terminal application -- and PTERM was born.
  78.  
  79.       William has been extremely sensitive to the problems I found and
  80.       enhancements I suggested, and should be commended for authoring such
  81.       a stable and comprehensive communications library, which is available
  82.       for DOS, Windows, OS/2 and Windows NT. All of the file transfer
  83.       protocol code (Zmodem/Ymodem/Xmodem) is Williams, and he has done an
  84.       excellent job implementing them (sealink and telink are also included
  85.       in the communications library, but not in PTERM -- Xmodem and Ymodem
  86.       will be available in the next release of PTERM).
  87.  
  88.  
  89.    I Didn't Do It, I Swear!
  90.    ========================
  91.  
  92.       Every precaution has been taken to ensure the safe operation of
  93.       PTERM in your Windows NT system. But, come'on, this copy of PTERM
  94.       in beta, and I'm warning you of such, so obviously I cannot be
  95.       held responsible for any damage done to your system (or psyche) by
  96.       PTERM or any interaction involving PTERM. So all I can say is "I
  97.       didn't do it!", so don't blame me!
  98.  
  99.  
  100.    What Do I Need To Use PTerm?
  101.    ============================
  102.  
  103.       You need an Intel based (Intel Inside sticker optional) PC running
  104.       Windows NT (March '93 build or later), with at least one serial port
  105.       and a modem attached to that port. Actually, if you just want to use
  106.       PTerm for TELNET you won't even need a serial port. However, I do
  107.       not recommend using PTerm for any but the simplist of tasks while
  108.       telneting.
  109.  
  110.       If someone would like to send me a MIPS R4400 or DEC Alpha AXP, I
  111.       will be glad to get PTERM up on those platforms as well <grin>.
  112.  
  113.       Actually, I have had a number of requests for PTerm on the Alpha
  114.       (surprisingly none for MIPS). My standard answer is that I don't
  115.       have an Alpha machine and that since PTerm is based largely on a
  116.       commercial library, I am not in a position to give the source to
  117.       someone with an Alpha. This is too bad, but it will have to do for
  118.       now...
  119.  
  120.  
  121.    Alright, What Do You Want For This?
  122.    ===================================
  123.  
  124.       The list of things I want would be much too large to include in this
  125.       document, so you will have to settle for what I need.
  126.  
  127.       What I need, from you, is the following:
  128.  
  129.          o  Bug reports (there should be plenty)
  130.          o  Suggestions (again, no shortage expected here either)
  131.  
  132.       So, please, please inundate me with this information, I promise I
  133.       will consider anything submitted (but nothing not submitted).
  134.  
  135.  
  136.    Whereami?
  137.    =========
  138.  
  139.       I can be reached via internet mail at:
  140.  
  141.          roncox@indirect.com
  142.          rjc@infograph.com
  143.          urjc!rjc@pcg.com
  144.  
  145.       FIDOnet people, try netmail to UUCP at 1:1/31, first line of the
  146.       message body:
  147.  
  148.          To: roncox@indirect.com
  149.  
  150.       I plan on finding a reliable FIDOnet system here in town, and when I
  151.       do I will post my FIDOnet address for netmail.
  152.  
  153.       You can reach me on Compuserve at:
  154.  
  155.          71722,3175
  156.  
  157.       For slowest response, choose snail-mail:
  158.  
  159.          Ron Cox
  160.          ATTN: PTERM
  161.          Paragon Consulting Group
  162.          4212 West Cactus STE 1110-229
  163.          Phoenix, AZ  85029
  164.  
  165.  
  166.    I'm Getting Sleeeepy...
  167.    =======================
  168.  
  169.       I know, I know -- I will make this easy on you (and me) and keep
  170.       things real short.
  171.  
  172.       First, a couple of command line switches have been added to PTerm.
  173.       They are:
  174.  
  175.            -s
  176.                Go straight into the setup dialog. When PTerm is first run
  177.                on your system, it will not find a PTERM.INI file to read
  178.                configuration from. If you have a COM1, this is no problem
  179.                since PTerm will default to COM1 and run, at which point
  180.                you can press ALT-S to run through the setup (see below).
  181.                However, if you have no COM1, PTerm will complain and then
  182.                exit. Passing the '-s' option bypasses the check and lets
  183.                you configure PTerm straight away.
  184.  
  185.            -ifile
  186.  
  187.                Since PTerm keeps its setup data in an ini file, I needed
  188.                some method of allowing multiple copies of PTerm to run.
  189.                PTerm normally defaults to looking for PTERM.INI in the
  190.                \WINNT directory. By passing a '-ifile' switch, you can
  191.                change which ini file PTerm will use. For instance, if
  192.                PTERM.INI sets up PTerm for COM1, and you also want to run
  193.                PTerm on COM2, you can copy PTERM.INI to PTERM2.INI and run
  194.                PTerm as such:
  195.  
  196.                      pterm -s -ipterm2.ini
  197.  
  198.                Make sure the -s is first on the command line!
  199.  
  200.                Now, go into the setup and change the comport to COM2,
  201.                click Ok, then Save. Now you can use the above command
  202.                line (removing the -s) to invoke PTerm on COM2. 
  203.  
  204.                Note, the ini files MUST be in the \winnt directory, and
  205.                you must pass only the name (not the path) with the '-i'
  206.                switch.
  207.  
  208.       As is obvious from the discussion above, PTerm no longer uses
  209.       environment variables for configuration! So you can remove them all
  210.       from your PT.CMD (or master environment).
  211.  
  212.       PTerm configuration is now done through a set of dialog boxes. You
  213.       get to the main setup menu by pressing ALT-S. From here you can
  214.       choose to setup "Communications", "Modem Setup", "Macros", or "File
  215.       Transfers".
  216.  
  217.       At the bottom of the main setup menu are three buttons:
  218.  
  219.          Save  - Save any changes made to the setup.
  220.          Apply - Apply the changes made but do not save them
  221.          Done  - Don't apply or save any changes made
  222.  
  223.       All of the options in these setup dialogs are self explanatory (I
  224.       think), so I am not going to spend alot of time going over them. If
  225.       you have questions, just drop me some email and I will be happy to
  226.       help!
  227.  
  228.       The one area I would like to discuss is the "Macros". These are
  229.       literal strings which PTerm sends out when the appropriate key is
  230.       pressed (F1-F12) -- PTerm does NO fancy substitutions or expansions
  231.       on these these strings except to append a carriage return to them
  232.       before sending them out to the modem. The macro capability was added
  233.       out of guilt for not adding a dialer, and as such is useful for
  234.       defining upto 12 dial strings.
  235.  
  236.       Hitting ALT-C will show you the current settings as well as a list
  237.       of key commands (this is the same information which appears when
  238.       PTerm is first run).
  239.  
  240.       PTERM can be placed in (and executed from) the program manager, and
  241.       even has its own embedded icon (just like a real Windows program!).
  242.  
  243.       When using a batch enabled file transfer protocol (Zmodem), the file
  244.       selection dialog box which pops up for an upload will allow you to
  245.       select multiple files from any one directory, using the standard
  246.       Windows mouse/key combinations for multi-select lists (i.e. CTRL-CLICK
  247.       adds a file to the list, and try SHIFT-CLICK to extend the list to the
  248.       current point).
  249.  
  250.       For batch uploading, if PTERM finds a file called FILESTO.UPL in the
  251.       current directory (the directory you were in when you started PTERM),
  252.       it expects this file to contain a list of files (full paths) to
  253.       upload, and will attempt to do so. If PTERM finds this file, it will
  254.       go straight to uploading, bypassing the file selection dialog.
  255.  
  256.       I am sure I have forgotten a whole bunch of information here, but
  257.       this should be enough to get you off the ground.
  258.  
  259.  
  260.    Can I Run it Now?
  261.    =================
  262.  
  263.       Well... Ok...
  264.  
  265.       But, "Don't touch it, you'll break it..." (U.S. West T.V. ad)
  266.  
  267.       For those of you who have been spoiled all their lives by a dialer and
  268.       do not know how to do it manually, if you have a modem which supports
  269.       the Hayes command set (are there any which don't?) you can dial a
  270.       number from PTERM like so:
  271.  
  272.          atdt555-5555               Tone dial 555-5555
  273.          atdp555-5555               Pulse dial 555-5555 (yuck!)
  274.  
  275.       On my USR Sportster, the command
  276.  
  277.          a/
  278.  
  279.       executes the last command entered, and can be used to redial.
  280.  
  281.       Again, you can add upto 12 dial strings as macros if you like.
  282.  
  283.       PTerm now has text capture. It is toggled by pressing ALT-L. When
  284.       activated, PTerm will bring up a standard Windows dialog box for
  285.       getting a file name. Enter a valid file path and click Ok. If you
  286.       are currently capturing text, the title bar of PTerm will have the
  287.       word "Capturing" at the end of it. Press ALT-L to close the capture
  288.       file. If you exit PTerm with an open capture file, PTerm will close
  289.       it for you before terminating.
  290.  
  291.       PTerm pretty much stores everything except ANSI escape sequences in
  292.       the capture file. Also, if you use a file which already exists,
  293.       PTerm will append captured text to that file without disturbing what
  294.       was already there.
  295.  
  296.  
  297.    Some Closing Thoughts
  298.    =====================
  299.  
  300.       Its not much, but there it is. Please let me know of any problems or
  301.       suggestions for enhancements you have.
  302.  
  303.       On my 386-33, running the NT GA (with USP1 installed), I have
  304.       experienced excellent transfer speeds using the Zmodem in PTERM. On
  305.       text files, at 14.4K with .v42bis (57.6K maximum), I have seen 3800+
  306.       cps. The same setup on compressed files yields 1650 cps and higher.
  307.       The NT serial driver is absolutely flawless in its support of
  308.       FIFO's. Make sure you have a serial card with a 16550AFN FIFO on it
  309.       and you will get much better file transfer results!
  310.  
  311.       Another facet of the serial driver which operates well is RTS/CTS
  312.       flow control. This is always turned on when PTERM runs, later it will
  313.       be configurable. During heavy multi-tasking, RTS/CTS keeps the modem
  314.       under control, holding it off when the serial buffer gets full. This
  315.       has worked flawlessly.
  316.  
  317.       Ron Cox
  318.       Paragon Consulting Group
  319.  
  320.  
  321.    Special Thanks
  322.    ==============
  323.  
  324.       To the following, I give special thanks:
  325.  
  326.          Dale Ross for being a sort of liason between Microsoft and myself
  327.          to get some nasty bugs fixed. Not to mention the extensive
  328.          testing he has done for me (also the other members of Team PTerm
  329.          <grin> -- Bob Chronister, Michael Rod, Stephen Purpura, and
  330.          Randell Kennedy)!
  331.  
  332.          Greg Kochaniak for his *extensive* help in getting PTERM's telnet
  333.          support to be even as useful as it is!
  334.  
  335.          To ALL the other people (especially on internet) who emailed me
  336.          with suggestions, and a couple even sent source code.
  337.  
  338.       Thanks!
  339.  
  340.  
  341.    Technically Speaking
  342.    ====================
  343.  
  344.       Thought you were done, didn't you? Well, if you could care less about
  345.       some of the technical details of PTERM, you are, else read on.
  346.  
  347.       As mentioned, PTERM makes full use of multi-threading. This stuff is a
  348.       trip. It can make programming much more interesting (and in many cases
  349.       greatly simplifies things!).
  350.  
  351.       There are 7 threads of execution, 6 secondary and the 1 main thread
  352.       which all Win32 applications start with.
  353.  
  354.       The first two threads of interest are in Williams communications
  355.       library. One is responsible for taking characters in from the serial
  356.       port (actually, the serial driver) and placing them in a queue created
  357.       by the library (the input queue) which is made visible to the user
  358.       code. The second takes characters from another queue and writes them
  359.       to the serial port (driver). The user code is responsible for placing
  360.       characters to be sent out the port into this output queue, and does so
  361.       through a set of 'Send' member functions.
  362.  
  363.       Also, both of Williams threads use overlapping (asynchronous) I/O,
  364.       resulting in an even more efficient set up.
  365.  
  366.       Now for the threads I spawn. They are as follows:
  367.  
  368.          o  Input thread
  369.  
  370.             Because I did not want to muck with the input queue being
  371.             managed by the communications library, I created another layer.
  372.             My input thread simply waits for characters to appear in the
  373.             main input queue, and block copies them into a local queue used
  374.             by the display thread (below). If there are no characters
  375.             waiting in the main input queue, this thread sleeps until there
  376.             is (in the discussions which follow, this thread will be
  377.             referred to as 'my input thread', to differentiate it from the
  378.             main input thread operating in the library). It may be that I
  379.             can increase PTERM's efficiency slightly by removing this layer
  380.             and having the display thread pull characters directly from the
  381.             library managed input queue -- something I will consider.
  382.  
  383.  
  384.          o  Display thread
  385.  
  386.             This thread is solely responsible for removing characters from
  387.             the local input queue (managed above) and deciding what to do
  388.             with them. For instance, if the beginning of an ANSI escape
  389.             sequence is detected this thread passes control to a function
  390.             whose job it is to interpret the sequence (note: the ANSI code
  391.             still executes within the display thread, no other thread has
  392.             been created). One of the other jobs of the display thread is
  393.             to optimize the output into the console window. This is done in
  394.             a very simplistic manner. In the absence of ANSI escape
  395.             sequences, the display thread will accumulate characters from
  396.             the local input queue into a buffer -- up to 80. When the
  397.             limit of 80 has been reached, or a special sequence is
  398.             detected, the display thread blasts the buffer to the screen in
  399.             a single call to WriteFile(). This is MUCH more efficient than
  400.             calling something like putch() for each single character.
  401.             However, at slow speeds (1200 and 2400 baud), it takes a
  402.             noticeable amount of time to accumulate 80 characters, and
  403.             this is the reason for the choppy display at these speeds. If
  404.             you set the port to anything less than 9600 baud, PTERM reduces
  405.             this 'blast' count to 8 characters, producing a smoother
  406.             display.
  407.  
  408.             As if this wasn't enough, the display thread has one more job to
  409.             perform. It watches for the tell-tale sequence of characters
  410.             which signal the host is preparing for a Zmodem upload or
  411.             download. If this sequence is found, it starts the appropriate
  412.             code.
  413.  
  414.             If there are no characters in the local input queue, the display
  415.             thread sleeps until there are.
  416.  
  417.  
  418.          o  User thread
  419.  
  420.             The user threads job is pretty easy. If the user hits a key,
  421.             decide what to do with it. Typically the key will be sent right
  422.             out the port. If it is a control key sequence (like ALT-X), then
  423.             the user thread executes the code appropriate for that key. This
  424.             thread blocks on the keyboard, and as such sleeps when there are
  425.             no characters available.
  426.  
  427.  
  428.          o  Main thread
  429.  
  430.             The main thread is the first thread which executes (starting in
  431.             main()). It initializes the port and other things, starts up the
  432.             three threads above, and then goes to sleep waiting for all
  433.             three of the threads above to terminate. At this point it wakes
  434.             up and calls ExitProcess(), ending PTERM.
  435.  
  436.  
  437.       Them's the threads, and a nice bunch of threads they are. However, if
  438.       there is one thing I quickly learned from spawning threads all over
  439.       the place, its that synchronization thingy.
  440.  
  441.       Here's the scenario: My input thread pulls characters from the main
  442.       input queue to place in the local input queue. Fair enough. So, I
  443.       start a Zmodem download. Boom! Of course, the Zmodem download code
  444.       also wants to pull characters from the main input queue, so my thread
  445.       fights with the Zmodem code. Remember, the Zmodem code is run as part
  446.       of the display thread. So my input thread grabs some characters, then
  447.       the Zmodem code [running in the display thread] grabs some
  448.       characters, and so on. Zmodem will end up missing a bunch of
  449.       characters it expected to see, and my input thread grab some
  450.       characters from the transfer which the display thread will finally
  451.       get and try to display. A mess...
  452.  
  453.       So, I need to find a way to synchronize the two threads. When Zmodem
  454.       wants control of the main input queue, it needs to 'ask' for control
  455.       from my input thread. Well, it really isn't as formal as all that.
  456.  
  457.       Just before my input thread grabs characters from the main input
  458.       queue, it waits on a semaphore. Simplified, a semaphore is just an
  459.       object which keeps count of how many threads have asked for control
  460.       of it. When its count is 0, access is granted to the waiting thread.
  461.       When a thread gets access to it, the semaphores count is incremented.
  462.       Any other thread which waits on it goes to sleep until the semaphores
  463.       count becomes 0 again. The count is decremented when a thread
  464.       explicitly releases a semaphore, thus allowing another thread to gain
  465.       access (this can get complicated when there are more than 2 threads).
  466.  
  467.       Ok, where were we? Oh, yes, my input thread waits on this semaphore
  468.       gadget. Typically, it gets control instantly and drops into the main
  469.       body of its code where it grabs characters from the main input queue
  470.       and stuffs them in the local queue the display thread uses. Once it
  471.       has transferred some characters, it releases the semaphore (and gives
  472.       up the rest of its time slice). Its during the time between releasing
  473.       the semaphore and waiting on it again that the file transfer code
  474.       must act.
  475.  
  476.       The first line of code for a file transfer waits on the same
  477.       semaphore. As soon as my input thread releases the semaphore, the file
  478.       transfer code gets and holds access to it until the transfer is
  479.       completed, thus preventing my input thread from mucking with the main
  480.       input queue during the transfer. Whew!
  481.  
  482.       Being this is my first foray into threads, I am very interested to
  483.       find out if my code breaks on a multi-processor machine. Does my code
  484.       work now because it takes advantage of the synchronous behavior of a
  485.       single processor? Interesting stuff, but I forgot to pick up my
  486.       Sequent 16 processor monster-box at the grocery store the other day,
  487.       so I suppose the answer will have to wait...
  488.  
  489.       I found one other interesting thing about Windows NT -- it seems to
  490.       like to write data to the disk right away. Generally, this is a good
  491.       thing, keeps your data safe. However, with Zmodem code writing 1K
  492.       blocks to disk every .7 seconds or so (at 1650 cps), the disk access
  493.       began to affect the performance of the download. The solution was
  494.       easy, I just used a call to setvbuf() to create a memory buffer. The
  495.       size I chose is 64K. So the system (C runtime) will accumulate 64K
  496.       bytes from the fwrite()'s before writing to disk. Believe it or not,
  497.       NT can actually write a 64K block to disk as quickly as a 1K block --
  498.       difference is, now Zmodem only hits the disk one a minute or so (at
  499.       1650 cps). Works great. Notice I said I made a 64K buffer. You 16 bit
  500.       guys probably have (as I did) the signed integer maximum value
  501.       memorized, 32K right? Well, under NT, a signed integer is 2^31, for a
  502.       maximum [signed] value of 2 GB. So 64K was small compared to what
  503.       I could make it.
  504.  
  505.       The file access areas of the transfer protocols are excellent
  506.       candidates for overlapped I/O, probably doing away with the need for a
  507.       write buffer. However, since Williams library is meant to be
  508.       multi-platform, it is best to keep it as generic as possible. But,
  509.       it is C++, and with proper inheritance the function responsible for
  510.       writing data to disk could be overloaded (and William has isolated
  511.       this operation for easy overloading!). A possible future enhancement
  512.       to PTERM.
  513.  
  514.       One more technical note: PTERM does not change its base priority
  515.       class, but it does manipulate the priority of several of its threads
  516.       relative to the priority class it is started at. What? Ok, if you run
  517.       PTERM from the command line like so:
  518.  
  519.          start pterm.exe
  520.  
  521.       then PTERM gets a base priority class of NORMAL. Using these commands:
  522.  
  523.          start /idle pterm.exe
  524.          start /normal pterm.exe
  525.          start /high pterm.exe
  526.          start /realtime pterm.exe
  527.  
  528.       I strongly recommend leaving it at NORMAL priority (by using the
  529.       /normal switch, or not giving a priority at all). You are, of course,
  530.       free to experiment.
  531.  
  532.       Well, the rest of PTERM is plain and boring (as if the preceding was
  533.       not!). So not much else to say. Any specific questions? Feel free to
  534.       contact me!
  535.